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Abstract 



The method involves passing the input speech through a preprocessor into a speech processing unit, where it is 
subjected to a speech recognition process. The preprocessor extracts characteristics from the input speech, segments 
and classifies it according to the energy content, and only passes the segments whose energy content exceeds a 
defined or adaptively determined threshold. Each segment whose energy content exceeds the threshold is finally 
investigated, and classified as to whether it is derived from a speech or non-speech signal. Only those segments derived 
from speech signals are processed further. 
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(§) Die Erfindung betrifft ein Spracharkennungsverfahren, bei 
dem eirigehende Sprachslgnaie ubar eine Vorverarbeitungs- 
einheit einer Spracherkennungseinheit zugeleitat warden 
und dort einem SpracherkennungsprozeS unterworfen war- 
den, wobei mfttels dar Vorverarbeitungseinheir dfe einge- 
henden Sprachsigneie efner Merkmalsextraktion, einer Sag- 
mentierung und einer Klassrffzierung nach dem Energiege. 
halt unterzogen werden und wobei nur dfejenigen Segmente 
wejtervcrarbeitet werden. deren Energiegaharr einen verge- 
gebenen oder adaptiv ermittelten Energie-Schwellenwert 
dberschreitet. 

Urn eine m6gl/ch$t robuste Spracheckennung durchfOhren 
zu k5nnen und um den eigentlichen Spracherkanner zu 
ent asien, wird nach der Erfindung vorgeschlagen, daS 
dfejenigen Segmente. deren Energiegehalt den vorgegebe- 
nen oder adaptiv ermine/ten Energie-Schwellenwert uber- 
schreiten, anschlieSend daraufhin untersucht und klasaffi- 
ziert warden, ob eie aus einem Sprachsignai oder einem 
Nicht-Sprachsignal abgeleitet sfnd, und daS nur die ats aus 
einem Sprachsignai abgeleitet klassifizierten Segmente wai- 
ter verarbeitet werden. 

Dementsprechend wird fur die Anordnung zum DurchfOhren 
des Verfahrens, die mit einer Merkmalsextraktionseinheit 
emem dieser Einheit nachgeschafteten Energiedetektor ei- 
ner diesvm Detektor naehgesehalteten Vektorquantisie* 
rungsemheit und einer dieser Einheit . nachgesehaltoten 
KJassifJzierungselnheit. ausgerustet ist, vorgaschlagen dafi 
zwisahen Energiedetektor und VekrorquantJsierungseinheit 
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gnalen (die b^timSerWortfr, ^herten Referenzsi- 

fung vonfiedewuSffi^ f- l ? m *ahtaprt>- 
nichtau S zuscSS haU JU8ehonffen Wo «« «»r 

^Su^ ^entierung und 

ben den SDraeh?S! nergl ^ f rfo,gt - werde " ne- 

einhe t aufgrund einer P ™ . rkennun g s - 

gj— Verarbeitung^ ^tJSSa* 
Te!efon C %i • mt ' da das S P rache rkenn un g SS ystem des 



ausblenden 2u knnn*»n 

Referenzmusfer ftolSSJ2Sf^ , B aMf ^« fc 
- n ^ssystemzarVerfu OT ^°"f n dem s P"*herken- 
Mit einem solchcnvSX^ !2? ton - 
rauscbe zwar im Spracher^ ° nnen diese Nebenge- 
erkannt und Z&^SV""^ * solch * 

10 durchlaufen jedoch auch de . Nebengerausche 

Referenzmuster fQr SorSSS? u Cr S es P ei <*erten 
ahnlichsten ist entwed er rjm 1 f . N,chtw °™ ihnen am 

den. waszu unsinniwn ErS^ , b !™ cksichtl 'gt wer- 

empfindUch is. gegenX 'lS5S2 t£ d ma * lich » «»- 
bei der Spracheingabe. Si "^^^n 

maglichst einfacb KftS,^^ 2U schaf *". die 

kennzeichnenden WerkSdel Pa^^" d " rch die 
ao dergegeben und fan hH£ 15 ten «™pruchs 1 wie- 
ordnung dureh die k«S» ^' f scha ffende An- 
temai4 mch 7> 1CCM2eich « e n d en Merkmaiedes P a - 

Ein wesentlicher Voneil rf<.r j 
sung in darin z« sehec ?d*£ «J f rfind ungsgemafle n L6- 
bereits in der WerLbe^.^ 6 . Nebe »Serausche 

solche erkannt werdenSdeSht 6 " T er J assi e ^ 
kennungseinheit zug e | e ?S S« ^ der S P r acher- 
s Pracherkennun« e inhe I D ^roh wird die 

« erheblichverringen weS^ Rechen "» 

45 sche in der Vo^erarLS^ *• Nebengerau- 

Verfahren mit einer sehr hohl„ V.u ^^""gsgemaBe 
Iichkeit ffir die eiW«^ 8 n Erkennu »gswahr S chein- 

nachdemVeSahreSSr^ Die 
so ordnungzeichnetsichdlhl^ V^^BSg^mmi An- 
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uTn'J ^«««iei sich daher dure 

einSctVe 6 ^ Sprachsigna,, mit 

SpracherkennungsS^r ^il-f ' Crvdlen ^ di « d <* 
to be. einem ^5™^?^!^ S P™ c ^gnaltei. 
« 0Rfr2a) und bei eS hevor,^ St ? nd der Tech "ik 
^^dung^^ 

Fig- 3 das FluBdiagramm einer bevo^ea Ausfab- 
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rungsform des erfindung^^iaBen Verfahrens n A« a ^ 

Das in Fig. I gezeigte Spracherkennungssystem be- s^hreiten^nH^'- ?° | ner S. ie -S<*wellenwen Uber- 

steht aus einer Spracheingabeeinheit (z. B. einem Mi- SS? hSL ^ ^ ,n Rech *<** eingefafit 

krophon) J, das ausgangsseitig an dne MerkmiseTtrak- &S I ff' neb ^ den tatsachJich einglspro- 

Uonsemheit 2 angeschtossen ist Die MerkmafeeSrak- « deTz£ll ^ ra ° k bls5 ^ uchdieAtem gerau S ch e 2wi S chen 

tor 3 angescbJossen. dem em Nichtwortdetektor 6 nach- fera 0 bis 9^ r vJ f- ^" V ? kabularium nur d " Zif- 
geschaltet «. Djesem wiederum ist eine VektorquanS- £i S%^V'!? etaS P ritll «'- 
sieningseinhe.t 4 nachgeschaltet an die sich eine KJassi- SSft^ 88 "' 1 * (egal ob S P ra «=h S ignal oder 
fraerungseinheit S anschlieSt. Die sich daran anschJie- ,„ miTt?lf« 2 « d f n VOr & e ^benen oder adaptiv er- 
Cende - an sich bekannte - Slgnriv«iSSL5JS& '° ZSn^^t^f^T flbers <*ritte n fatten, 
-ausgabeemhe t des Spracherkennunssystems isl nicht S J al Ref r«n™ > S P^«*«w«- ^angsweise 
ge Z e,gt und bi det auch nicht den Gegenstand der vor- Snet Referenzmuster abgespeicherten Ziffern zu- 
hegenden Erfindung. Wfihrend die Merlcmalsextrak rw , 

ti 0 nseinhejt2,derEnergiede t ektor3undderNichwort. ZsSSSh^S^ T"*" 1 ZWar die «« P ro C henen 
detektor 6 zur Vorverarbeitungseinheit des Sprache . M^J^^T^ 1 ^^"^^^- 
kennungssystems gehoren, sind die Vektorquantisie- SeHSJto U V?*" Sondern es WUr de 

rungseinheit 4 und die Klassifikatbnseinheit 5 bereits S£ 2lffe J r aus dem v °kabu]arium des 
Tea deseigentlichenSpracherkenners. ^ SSSSSS^ 2u ^ordnet, die in der Figur jeweils aS 

Die Emstellung und Funktionsweise der einzelnen in ,« £h Ln c£f J . worden ist Bradestriche zwischen den 
Fig i gezeigten Fuaktionseinheiten fiSSSdS '° finale ^ ^ to Verbu « d wortmodu S eS 
Nichtwortdetektors 6) sind an sich bekannt und werden to fL *x • , ; 

daher bier an dieser Steile nicht weiter eriautert JlXL iS?" desseJben Sprachsi- 

Der Nichtwortdetektor 6 wird off-line uber bestimm- WUrde jedoch 2Us ^«ch in der Vor- 

"vorgegeberiePar^^ 25 SSSSi^ ^t-Sprachsignaldetekror 

erne Init,ahsierung ur Spracbsegmente durchgefuhrt SSnTbridi^m sJ^ 161 " ^ 5 ° r ? nun S S«naB Fig. 1. 
(Abg e.ch nut verschiedenen Sprechern bzw. DeTekrion fern? bis 5 LrfS ^c*" 1 t*. eil * e sP">chen en Zlf- 
auf Vokale us*.), zum anderen erfolgt in dieser Ph^e sSert wordS SI ? Spn^Jrignal erkannt und klas- 
anschheBend eine Feinjustierung mil Nichtsprachsigna- 2"ZT i (m d ^ r ^ 2a «kennbar an den 
len (GerauschenX bei der die Ausblendung solcber ?£- 30 SrSSSrt ? n ' s P rechen den Signalteilen), siS 

gaJeemgestelitwird. «-«crc>jn M a*e Atemgertusche euideutig ais Njcht-Sprachsiznale 

Zur Funktionsweise der Anordnung: ft ? r t ^ eitere Verarbeitung ausgeblendet 

Ober die Spracheingabeeinheit 1 efngehende SignaJe sS?to£ S P r h achsl ^ a ' fi erk ^^ ^en nut ditSem 
(S P rachsignaleundGerau S ch e )w e rd e nlnderMerC bfs 5 S 2bS ""f die eingesprochenen Ziffe rn ™ 
sextraktionseinheit 2 in Merkraalsvektoren zeriegTdie « SteUrt ' * " nterden SjgnalanteiJen als Ziffer dar- 
anschlteBend im Energiedetektor 3 daraufhin unter- SSS;v», . • u 

sucht werden. ob sie einen vorgegebenen oder adapth, fhS^ZZat^T**^ die Robust ^it des er- 
SSI Ener e ie - Schwe,1 ^ w «rt uberschreiten odS bengTSS Verfahrei5S gegenQber st6rendeh;N^ 

Nur diejenigen Segmente, deren Energiegehait die- « (4 n^S^ 6 ?f ^^Prachsignaldetektors 

sen ersten Energie-SchweUenwen tlbers^rfiten. wer- * graSnSderpS foI «? nden des FlaBdia^ 

den dem nachfolgenden Nichtwortdetektor zuaeleitet r2?V£u?* ? n f her ej " lautert - 

Dort werden sie daraufhin untersucht und klassifi- «rtifLS*2f!S o ein f s P/ oclien en Spracbsignals 
W ob sie aus einem Sprachsignal oder aus eYnem SSiSS e T em ^ alr J al V nenbi,dun ^prozeB un^ 
N^chtsprachs^nalabgeleitetsbdWahrenddieate v^n 45 traTsf^i^ nif ^t^, " Spektralbereicfi 
e,nem N^ht-Sprachsignal abgelehet kias 5 ifizi e rten Se? ?a™ FouSLr -fE* h , ,eht ^ beis P iel ^ft nit HHfe 

mente bei der weiteren Signalverarbeitung ausgeblen- SLa^^^2?™ to ^?? (FFT > Die tTmsior ' 
det, d h. ehminiert werden. werden die all von einem Mktor zuS !- n« en an ? chlleBe «d dem Energiede- 
Sprachsignal abgeleiteten kJassifizierten Segmente der £SS» P„f ■ u '? 0rt Wrd W pflft - ob de Signate in 
Vektorquantisierungseinheit 4. Ah. der elSchS so ^SS n ^ m ^ ar ^ am ^-^ 
Spracherkennungseinheit zugeleitet und dort wS 50 sSSkSSr."-^ ada P av «^«e)ten Energie- 
verarbenet er c^u W !n!" uberschreiten oder nicht Wird der 

Wle drastisoh sich diese Ausblendung der Nichts- SiS mC h ' Ube " c Wtten, wird das untersuchte 
prachsignale auf die weitere Verarbeitung ausSen S h h^ZZ ^ V 5 Jauf der Si ^verarbeitung nichr 
kann.ist beispielhaftinFig^gezeigt. % -Jj M«hi«t< "ausgeblendetl und das nacnstfol • 
Don 1st der zeitiiche Verlauf der AmDlitude eine, «^ T^Sf — d dem E nergiedetektor zugeleitet fdiei 
Sprachsignals gezeigt, bei dem die zfffern Sge SJ S^HftSL; {fA^ 3 durch d ^ W S 
ems. zwe, ( drei, yier. funr als Worte ges P rochen\inge- SfSESj ^ • Ut > ° berscfa ™tet das Signal jedoclr 
geben worden sind (in der Figur sind unter die enSpf e- SwSS fdS l K h ^ t d ^ u er l ten ^gJe-Schwe?" 
Snw^nj:^ Sprachsi « nale die Ziff — gesch'rie- « wle^J S^™ N ^ Spra ^^ 
Die Ziffem wurden von Atemgerauschen unterbro- y^^^^y!^^?^ ^ mSQ d * ■* sich 

chen Verlauf des Sprachsignals ebenfalls sichtbar sind . k - t ve i; steht man eine nichtlineare 

In Kg. 2a fat ferner die Energiesegmemierung ge- 65 HoSJ!tS„fk en P "$™*>****. die an die 
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demi mit i ■ 01 5 kt , ^ Sch,ieBend j 

tielle E^SeSIke " der ' ? mitteJt > deren P"- 

Begriff "Anzahl") " eur 8X61,1 das S ^ol * f 0r den 

meter2verglicnen v °rgegebenen Para- 23 

weiterverarSt "e^™ und das Signal 

^^eS^ n f^l^^ par- 
ameter l £d ! gS^t m ^T e ^ d ,.S[ 6Ber ^Is Pa- 

durch den zngehlK Wn™ dusser Fa » 

stelit). B e «ongen "nem -Pfeil graphisch darge- 45 

Parameter 2 sowie der »jH„ii'"'r ' ' V Uber dem 
nem TeiJband Ober dL ? %? 6 Ener S ,e S<*alt von ei- 

falls die zuvor beSSSX? Signaten, die eben- 
Sgtebe^ 

Signalrahmen der^tere^r?^ d dle i 0, g e v °» 

bene Zeitdauer Jedoch « 
fur ein Sprachsignal nichtals Sf n * e ^"ngungen 
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aJ • 6 

gnalrahmen dem EneS a ^S e3end , der na <**e Si- 
«£" Ze ' Chnet sich d ^ wjende Vorteile 

'*"£2^ von 
mcienStorungenkannenSea **««*^«o- 
- Hierdurch nicht erforderlich* 

^^S^btJ^^^ - ^ dar- 
vieknehr aufSTfbe^SSL b ^ Ch^ank, iSt » 

ftKSS^^ »r den 

zogen einstellen. JeweUige Anwendung be- 

TrS^tio^aSre?!^!? der FFT «««™ 

ob die 

gen, auf der Basis der S u ■ *? ? G ^"scb vorlie- 
i« partiellen S^S^SS^f 11 ^ bdividuel - 
bander, deren partSr En * • ^f 65 ^ j der Teil- 
[neter ! Uegen S dSffil^ Pa ™- 

individueU fur den A^wendun™ werden. 
z. B. j = 2 auf j . anzupassen (von 

^iteB e dingungderSh^ /? r l den FaU - d » fl -aJs 
giegehal: hSS? SdSfeSSS? - Partielle Er,er ' 
verglichen werden muB, Se IS Z T^ Parameter 
ren partieller Energi ege h a l t d^.j! gander, de^ 
nundest flberschritten haba ™ m I™ 16 ? Far ««eter zu - 

Ferner kann die Anza M si 1 . S? U s k < J3- 
individueUenAnwendu^^l 61 " TeUba « d «- i an den 

selbst an die jeweifec 1 KwenS e ^ ie * Scl »welIenwert 
erhdhen oder zu erSedri^T^ fSPP"^ d - b- 
^itdauer, die die Sffffi^, ** vo ^bene 
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m angesehen *SKSaSe^ff r8Ch l isnaJ ab er " 
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Merkmalsextraktiony einer Segmentierung und ei- 
ner Klassifizierung nach dern Energiegehalt unter- 
zogen werden und wobei nur diejenigen Segmente 
weiterverarbeitet werden, deren Energiegehalt ei- 
nen vorgegebenen oder adaptiv ermittelten ersten 
Energie-Schwellenwert uberschreitet, dadurch ge- 
kennzeichnet, daB diejenigen Segrnentc, deren 
Energiegehalt den vorgegebenen oder adaptiv er- 
mittelten Energie-Schwellenwert Qberschreiten, 
ansehlieBend daraufhin untcrsueht und klassifiziert 
werden, ob sie aus elnem Sprachsignal oder einem 
Nicht- Sprachsignal abgeleitet sind, und daB nur die 
als aus einem Sprachsignal abgeleitet klassifizier- 
ten Segemente weiterverarbeitet werden. 
2. Spracherkennungsverfahren nach Anspruch 1, 
dadurch gekennzeichnet, — daB die Merkmaisex- 
traktion eine Spektraltransforrnation beinhaltet 
und die spektral transformierten und in ihrem Ener- 
giegehalt den vorgegebenen oder adaptiv ermittel- 
ten Energie-Schwellenwert iiberschreitenden Seg- 
mente nach einer vorgegebenen mel-Skala in spek- 
traie Bereiche aufgeteilt und ansehlieBend die spek- 
tralen Bereiche in Teilbander i mit i — 0,1,2 . N-l 
zusammengefaBt werden; 

— daB in alien Teilbandern i jeweils der als das 
auf den GesamtenergiegehaJt Ej des jeweiligen 
Tetlbandes i normierte Maximum der Energie 
Elrow des jeweiligen Teitbandes i definierte 
partielle Energiegehalt des jeweiligen Teilban- 
des bestimmt wird; 

— daB ansehlieBend die partiellen Energtege- 
halte aller Teilbander i mit einem vorgegebe- 
nen ersten Parameter (Parameter 1) vergli- 
chen werden und 

— daB bei Oberschreiten des ersten Parame- 
ters (Parameter 1) durch die partiellen Ener- 
giegehalte von j Teilbandern, I < j < N, vor- 
gegebene Bedingungen fur das Vorliegen ei- 
nes arukulatorischen Gerausches als erfulh 
angesehen werden und das zugehdrigT: Seg- 
ment des Sprachsignals weiterverarbeitet 
wird. 

3. Spracherkennungsverfahren nach Anspruch 2, 
dadurch gekennzeichnet, 

— daB bei Segmenten, bei denen der partielle 
Energiegehalt nur von j — k TeUbandern, 1 < 
j < N und 1 ^ k < j, den vorgegebenen ersten 
Parameter (Parameter l) uberschreitet, an- 
sehlieBend der durchschnittliche partielle 
Energiegehalt aus alien partiellen Energiege- 
haiten des jeweiligen Segments oder aus ei- 
nem Teil dieser partiellen Energiegehalte des 
jeweiligen Segments gebiidet und mit einem 
vorgegebenen zweiten Parameter (Parameter 
2) verglichen wird und 

— daB bei Oberschreiten des zweiten Parame- 
ters (Parameter 2) durch den durchschnittli- 
chen partiellen Energiegehalt die vorgegebe- 
nen Bedingungen fur das Vorliegen eines arti- 
kulatorischen Gerausches ajs erfulh angese- 
hen werden und das zugehorige Segment des 
Sprachsignals weiterverarbeitet wird. 

4. Spracherkennungsverfahren nach einem der An- 
spruche 2 oder 3, dadurch gekennzeichnet, daB fur 
den Fall, dafl die partiellen Energiegehalte aller 65 
Teilbander i den vorgegebenen ersten Parameter 
(1) Oberschreiten oder daB der partielle Energiege- 
halt von keinem der Teilbander i den vorgegebenen 
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ersten Parameter (Parameter 1) uberschreitet, oder 
fur den Fall r daB zwar der panielle Energiegehalt 
von j-k Teilbandern den ersten Parameter (Para- 
meter 1) Uberschreitet, aber der durchschnittliche 
partielle Energiegehalt nicht den zweiten Parana 
ter (Parameter 2) uberschreitet, die vorgegebenen 
Bedingungen fur das Vorliegen eines artikuiatori- 
schen Gerausches nicht als erfiillt angesehen wer- 
den und das zugehorige Segment von der weiteren 
Verarbeitung ausgeschlossen wird 

5. Spracherkennungsverfahren nach einem der vor- 
hergehenden AnsprQche 2 bis 4, dadurch gekerm- 
zeichnet, daB j = 2 gewahlt ist 

6. Spracherkennungsverfahren nach einem der An- 
sprQche 2 bis 5, dadurch gekennzeichnet, daB, so- 
fern fUr eine vorgegebene Anzahl von aufeinander 
foigenden Segmenten die Bedingungen fur das 
Vorliegen eines anikulatorischen Gerausches als 
erfulh angesehen werden, diese Gruppe von Seg- 
menten als Sprachsignal klassifiziert und weiterver- 
arbeitet werden. 

7> Anordnung zum Durchfahren des Verfahrens 
nach einem der vorhergehenden Anspruche, mit 
einer Merkmalsexiraktionseinheit, einem dieser 
Einheit nachgeschalteten Ehergiedetektor, einer 
diesem Detektor nachgeschalteten Vektorquanti- 
sierungseinheit und einer dieser Einheit nachge- 
schalteten Klassifizierungseinheit, dadurch gekenn- 
zeichnet, daB zwischen Energiedetektor (3) und 
Vektorquantisierungseinheit (4) ein Nicht wonde- 
tektor (6) geschaltet ist. 



Hierzu 3 Seice(n) Zeichnungen 



BN60OC.ID: <0E-J W2S2WA1 J^> 



07-11-2001 08:42 

ZEICHNUNQEN SElTE 1 



JURIDISCHE ZPKEN 



0703323840 
Offeniegungstag: 



P. 20/39 

OE 156 25 294 A1 
OlOL 7/08 
2. Januar 1998= 




CLI O 



r 



o 



*9 



a/ 
E 

aj 
a. 



23 
ro 



S 



OJ 



CO 



c: 



Qi 

-a 

Of 



ai 



c: 



c: 

3 



IS) 

ai oj 

I £ 

cL £ 



cr 



c 

15 .2, 



702 081/392 



07-11-2001 08:42 
„ ZEIOHNUNGEN SEITE 2 



JURIDISCHE ZAKEN 



0703323840 P . 21/39 



lummer; 

M. CI. 6 : 

Offenlegungstag: 



OE 196 25294 A1 
G 10 L 7/08 

2. Januar 1998 



x1p4 Segmenfierung ohne Nichhrforrdet-ekf- 



or 




A ems 7-zw ei 3 3-8-dref 3-3 ,4~vier 0-73 -4-fHnf 

5 10 15 

Zeit [s] 

FIG. 2 A 



2 5 x10^ SegmenHerung mit Nfchtwort.det ektor 
2 * * * — — 




BNSOOCID: <D£_1fl*252(MA7 I » 



702 061/392 



07-11-2001 08:42 
ZEICHNUNGEN SEtTE 3 



JURIDISCHE ZPKEN 



[jignalra hmenbildunq]^ 



FFT 



[Energ iede^ktionj 

Energiebedingunq\ nein 
erfullt? >— — 





i -1 ~ 

Zusammenfassung von mel- ~| 
[ Spgktrum zu T P ilh5n Hn rn ; s0 ^ 



DetekHon E lmax / E j 
im TeKfaand i 




alle Teilbander NtVJ!^!! 
Paramel-er 1} >t 



Offenlegungstag 



0703323840 p . 22/39 



196 2$ 234 At 
G 10 L 7/OB 

2. Januar 1998 



^Partiaienergien > 



Bedi 



mgung ^ fiir arfikulaforisch 



Gerausch lipnt 



vor 




Zeitdauerbedingung 

erfiiilt? " " 



E 



es 



nem 




jsprachsegroenherung 



FIG. 3 



702 061/392 



This Page is Inserted by IFW Indexing and Scanning 
Operations and is not part of the Official Record 

BEST AVAILABLE IMAGES 

Defective images within this document are accurate representations of the original 
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